f6fd674bd36227d6b0f55d5d0c45ec581b3063fb
ce
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2023-03-02 17:06:57.132212 UTC
- file basename
- out
test-B / 6e97d40daedde1b689902c6b9b693921cc9a39c5
| Metric | Score |
|---|---|
| NDCG@10 | 51.78 |
test-A / 164d9330ad76d36ece109e89aced8b369990986c
| Metric | Score |
|---|---|
| NDCG@10 | 57.71 |
dev-0 / 191edc50d06153887cde445ff9afdbe4d29039f4
| Metric | Score |
|---|---|
| NDCG@10 | 29.29 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-A NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 2242519-0 3184604-2 2734991-1 162911-6 2421-3 957095-0 558531-5 3186472-3 1861734-2 4286625-34 | 0.00 |
| 2 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 934126-0 26170-16 162084-10 2279030-0 664688-3 1775405-2 934126-4 3561031-14 11729-16 589037-3 | 0.00 |
| 3 | wiki-trivia Jak nazywa się trucizna przyrządzona z korzenia szaleju? | 25098-0 141316-6 5423-11 | 673029-1 199855-0 30176-77 3094293-7 633270-0 1678344-2 443365-9 30176-19 3094293-1 30176-111 | 0.00 |
| 4 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 79082-11 3584220-0 552904-0 2005270-0 49762-0 49767-0 2533825-53 1288875-9 3572733-0 27439-0 | 0.00 |
| 5 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 799841-3 3976505-10 2397753-0 145643-3 187229-2 134677-0 4706926-27 471664-70 799833-34 799373-0 | 0.00 |
| 6 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 572271-0 1586007-9 1586714-10 3514321-2 1589379-8 566324-0 1488895-0 1799769-22 2033016-2 2033016-3 | 0.00 |
| 7 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 1853565-0 366849-1 1103608-0 1143082-0 2194-124 673572-14 3491368-3 14996-35 4152403-0 1853548-3 | 0.00 |
| 8 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 51116-0 118422-6 4141706-8 7854-8 3710137-7 162129-0 37916-3 1596409-1 3710137-4 162129-4 | 0.00 |
| 9 | wiki-trivia Kto powołuje prezesa NIK? | 100304-0 615610-2 189807-110 2797003-26 | 185631-9 33653-31 106336-0 110371-3 4554232-2 1285735-3 178235-3 50268-25 7670-138 100304-28 | 0.00 |
| 10 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 183444-1 534661-6 121015-8 2739552-1 461101-1 2365092-12 2097798-2 3311571-3 1460987-0 52146-239 | 0.00 |
| 11 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 2198008-0 8148-0 1590294-26 336749-0 547665-0 314920-8 2198008-2 2019764-4 2021840-4 725097-0 | 0.00 |
| 12 | wiki-trivia W którym starożytnym mieście budowano wieżę Babel? | 10168-12 13187-9 1861864-1 | 1868343-0 10168-0 658-14 557961-1 10168-28 1868343-5 2750446-6 1079280-11 434638-13 317800-29 | 0.00 |
| 13 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 1258696-0 76591-0 1497493-0 5199359-5 1203402-0 2616342-0 1497448-0 1487142-0 1261888-0 | 0.00 |
| 14 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 3612653-0 2130804-0 2044201-0 2210821-0 4081812-6 6608-7 1442177-1 1442177-0 1498341-5 2044201-2 | 0.00 |
| 15 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 1423676-5 210259-2 610227-2 141030-10 4355939-3 5133004-10 24742-3 399136-2 210259-3 113867-4 | 0.00 |
| 16 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 30332-19 917904-18 96488-10 1856051-0 1769-5 2328840-3 40246-7 9830-0 815765-1 2163090-10 | 0.00 |
| 17 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 562243-1 4704805-0 498311-0 1461623-60 696567-0 526076-0 4701349-0 1115392-0 4329879-0 2489221-0 | 0.00 |
| 18 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 3678011-6 7417-8 51936-2 1569670-3 282920-9 529739-0 1217220-8 2632483-3 7417-2 62676-7 | 0.00 |
| 19 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 1797224-0 1271388-0 449955-0 500532-0 469728-0 3995040-0 318249-12 5118056-1 46922-8 4635429-0 | 0.00 |
| 20 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 332358-12 1071082-1 2174186-2 2789510-3 1970120-20 1085191-1 482383-1 127509-0 1288875-11 127513-1 | 0.00 |
| 21 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 104191-1 535257-0 563600-11 245782-0 659122-0 5103420-8 1005884-9 916012-0 450316-2 4709920-0 | 0.00 |
| 22 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 3501817-15 1689104-2 443919-0 4369132-4 1352589-26 3095833-0 1944379-3 13378-73 644625-23 4011645-1 | 0.00 |
| 23 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 4115201-51 1905187-4 185768-12 1012338-1 1255736-1 1944379-3 3127508-0 371096-19 957404-0 1400113-0 | 0.00 |
| 24 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 1658867-146 314765-5 209672-12 1245061-38 3081651-6 2807644-19 552783-1 30378-9 363695-7 552783-2 | 0.00 |
| 25 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1874026-0 1193751-0 1219119-0 1209122-0 1209122-1 2027875-9 115440-0 5531-0 2022498-0 642555-0 | 0.00 |
| 26 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 134896-1 1418508-339 193584-2 7104-0 43584-1 459922-5 516032-0 2048728-0 266127-3 | 0.00 |
| 27 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 984901-6 984901-17 2311468-1 43683-10 6567-1 984901-0 62452-2 984901-7 1792582-0 112870-3 | 0.00 |
| 28 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 3538138-40 911595-6 1602497-8 308840-5 2302030-0 1108611-1 35040-24 1515517-91 331182-4 665627-1 | 0.00 |
| 29 | wiki-trivia Jak miał na imię Makuszyński? | 49827-0 49827-8 49827-14 1509748-0 12060-7 | 1833337-3 556940-1 138033-9 2186014-1 1708555-2 14996-35 1285479-0 175277-78 4005928-0 7859-36 | 0.00 |
| 30 | wiki-trivia Z którego kontynentu pochodzą papużki nierozłączki? | 1507283-2 | 1507283-0 1507283-10 4749422-8 1507283-5 2372292-13 4498545-0 1938663-0 1320346-0 1243697-0 4749422-12 | 0.00 |
| 31 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 1730558-18 1876171-1 4064684-0 598417-7 4412310-8 991165-16 2202758-1 945740-0 5222072-0 3345310-0 | 0.00 |
| 32 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 824743-3 2910023-1 1827042-13 2123923-5 299029-0 2889-40 3735127-3 4417248-6 2427571-5 2050780-23 | 0.00 |
| 33 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 462645-5 10783-3 896285-6 2137224-29 30330-19 911858-0 1741200-0 2621233-0 128924-0 10788-0 | 0.00 |
| 34 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 2070144-0 2521418-0 1930869-0 2975809-0 5047935-0 1906468-0 1930924-0 2528115-0 9576-11 1924948-0 | 0.00 |
| 35 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 88901-1 189807-31 115492-7 2844076-2 2462290-7 2772363-0 1989366-0 115521-7 5603-108 9445-1 | 0.00 |
| 36 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 4277-20 1214644-3 523654-0 39134-1 391783-28 792894-0 423998-0 804192-0 4674879-8 3005652-3 | 0.00 |
| 37 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 540491-1 655344-2 2783340-0 4369874-32 4403981-12 1838120-5 1944379-3 3994954-3 3951141-0 32308-6 | 0.00 |
| 38 | wiki-trivia Jak nazywa się jadalnia dla załogi na statku? | 16828-0 | 789944-0 391783-0 4974149-0 515540-0 4905120-1 845028-17 3088982-30 2790-0 299808-7 391783-25 | 0.00 |
| 39 | wiki-trivia W którym roku Otton III i Bolesław Chrobry spotkali się na zjeździe gnieźnieńskim? | 2048803-0 1930212-0 8196-0 44843-1 411720-13 | 20984-5 1930212-3 1876386-10 626730-43 913829-7 2048803-1 33541-14 4064960-0 1643289-1 178262-4 | 0.00 |
| 40 | wiki-trivia Z repertuaru którego zespołu pochodzi utwór „Jestem z miasta”? | 1642348-0 741949-0 204472-3 3208891-8 | 1642348-2 1159288-1 1938222-7 1642348-3 3542862-0 1074946-3 1642348-6 3542873-0 1543428-1 2180772-5 | 0.00 |